
    <!DOCTYPE html>
    <html lang="zh-CN">
    <head>
      <meta charset="UTF-8">
      <meta name="viewport" content="width=device-width, initial-scale=1.0">
      <title>数据去重有哪些方法 - 交互式测验</title>
      <style>
        @import url('https://fonts.googleapis.com/css2?family=Noto+Sans+SC:wght@400;500;700&display=swap');
        
        body {
          font-family: 'Noto Sans SC', sans-serif;
          background-color: #f4f7f9;
          color: #333;
          display: flex;
          justify-content: center;
          align-items: center;
          min-height: 100vh;
          margin: 0;
          padding: 20px;
          box-sizing: border-box;
        }
        
        .main-wrapper {
            position: relative;
            width: 100%;
            max-width: 900px; /* Wider to accommodate buttons */
            display: flex;
            justify-content: center;
            align-items: center;
        }

        .quiz-container {
          background-color: #ffffff;
          border-radius: 16px;
          box-shadow: 0 8px 32px rgba(0, 0, 0, 0.1);
          width: 100%;
          max-width: 700px;
          overflow: hidden;
          z-index: 10;
        }

        .quiz-header {
          background-color: #4a90e2;
          color: white;
          padding: 20px 30px;
          text-align: center;
        }

        .quiz-header h1 {
          margin: 0;
          font-size: 24px;
          font-weight: 700;
        }
        
        .quiz-header p {
            margin: 5px 0 0;
            font-size: 14px;
            opacity: 0.9;
        }

        .quiz-body {
          padding: 30px;
        }

        .progress-bar {
            display: none; /* 隐藏进度条 */
            width: 100%;
            background-color: #e0e0e0;
            border-radius: 5px;
            height: 10px;
            margin-bottom: 20px;
        }

        #progress-indicator {
            height: 100%;
            width: 0%;
            background-color: #4caf50;
            border-radius: 5px;
            transition: width 0.3s ease;
        }

        #question-container {
          margin-bottom: 20px;
        }

        #question-text {
          font-size: 18px;
          font-weight: 500;
          line-height: 1.6;
          margin-bottom: 25px;
        }

        .options-list {
          list-style: none;
          padding: 0;
          margin: 0;
        }

        .option-item {
          background-color: #f8f9fa;
          border: 1px solid #dee2e6;
          border-radius: 8px;
          padding: 15px;
          margin-bottom: 12px;
          cursor: pointer;
          transition: background-color 0.2s ease, border-color 0.2s ease;
        }

        .option-item:hover {
          background-color: #e9ecef;
        }
        
        .option-item.selected {
            background-color: #d1e7fd;
            border-color: #4a90e2;
        }

        .quiz-footer {
          padding: 20px 30px;
          display: flex;
          justify-content: space-between; /* 将按钮分布在两侧 */
          align-items: center;
          min-height: 65px; /* Reserve space */
        }

        .nav-btn {
          background-color: #4a90e2;
          color: white;
          border: none;
          border-radius: 8px;
          padding: 10px 20px;
          font-size: 16px;
          font-weight: 500;
          cursor: pointer;
          transition: background-color 0.2s ease, transform 0.2s ease;
          box-shadow: 0 4px 12px rgba(0,0,0,0.15);
        }
        
        #next-btn {
            background-color: #28a745;
        }

        .nav-btn:hover {
          background-color: #357abd;
          transform: scale(1.05);
        }
        
        .nav-btn:disabled {
            background-color: #a0c3e8;
            cursor: not-allowed;
            opacity: 0.7;
        }

        #result-container {
            border-top: 1px solid #eee;
        }
        
        .result-box {
            border-radius: 8px;
            padding: 20px;
            margin-top: 20px;
        }
        
        .result-box.correct {
            background-color: #d4edda;
            border: 1px solid #c3e6cb;
            color: #155724;
        }

        .result-box.incorrect {
            background-color: #f8d7da;
            border: 1px solid #f5c6cb;
            color: #721c24;
        }
        
        .result-box h3 {
            margin-top: 0;
        }

        .explanation-text {
            margin-top: 15px;
            line-height: 1.7;
        }
        
        .source-text {
            font-style: italic;
            font-size: 14px;
            margin-top: 15px;
            color: #555;
        }

        
        .final-score-container {
            padding: 40px;
            text-align: center;
        }
        .final-score-container h2 {
            margin-top: 0;
            margin-bottom: 30px;
        }
        .score-summary {
            display: flex;
            justify-content: center;
            gap: 20px;
            margin-bottom: 40px;
            flex-wrap: wrap;
        }
        .score-card {
            background-color: #f8f9fa;
            border-radius: 12px;
            padding: 20px;
            width: 180px;
            box-shadow: 0 4px 12px rgba(0,0,0,0.05);
            border: 1px solid #e9ecef;
        }
        .score-card h3 {
            margin: 0 0 10px;
            font-size: 16px;
            font-weight: 500;
            color: #555;
        }
        .score-card p {
            margin: 0;
            font-size: 28px;
            font-weight: 700;
            color: #333;
        }
        .score-details table {
            width: 100%;
            font-size: 16px;
        }
        .score-details td {
            padding: 4px 0;
        }
        .score-details td:last-child {
            text-align: right;
            font-weight: 700;
        }
        .report-actions button {
            background-color: #fff;
            border: 1px solid #ccc;
            border-radius: 8px;
            padding: 12px 25px;
            font-size: 16px;
            cursor: pointer;
            margin: 0 10px;
            transition: background-color 0.2s ease, border-color 0.2s ease, transform 0.2s ease;
        }
        .report-actions button:hover {
            background-color: #f1f1f1;
            border-color: #bbb;
            transform: translateY(-2px);
        }
        .report-actions button.primary {
            background-color: #28a745;
            color: white;
            border-color: #28a745;
        }
        .report-actions button.primary:hover {
            background-color: #218838;
        }
        
        .hint-container {
            background-color: #e0f7fa;
            border: 1px solid #b2ebf2;
            border-radius: 8px;
            padding: 15px;
            margin-top: 20px;
            color: #006064;
            font-size: 15px;
            line-height: 1.6;
            display: none; /* 默认隐藏 */
        }
      </style>
    </head>
    <body>
      <div class="main-wrapper">
          <div class="quiz-container">
            <div class="quiz-header">
              <h1>数据去重有哪些方法 - 交互式测验</h1>
              <p>检验你对文档内容的理解程度</p>
            </div>
            <div id="quiz-content">
                <div class="quiz-body">
                    <div class="progress-bar">
                        <div id="progress-indicator"></div>
                    </div>
                    <div id="question-container">
                      <p id="question-text"></p>
                      <ul class="options-list" id="options-list"></ul>
                    </div>
                    <div id="result-container"></div>
                    <div id="hint-container" class="hint-container"></div>
                </div>
                <div class="quiz-footer" id="quiz-footer">
                  <button id="prev-btn" class="nav-btn">上一题</button>
                  <button id="hint-btn" class="nav-btn" style="background-color: #ffc107; color: #333; box-shadow: 0 4px 12px rgba(255,193,7,0.3);">提示</button>
                  <button id="next-btn" class="nav-btn">下一题</button>
                </div>
            </div>
          </div>
      </div>

      <script>
        const quizData = [
  {
    "question": "在一个用户表中，同时存在 'John Smith' 和 'john smith' 两条记录。根据文档，这最准确地描述了哪一种数据重复问题？",
    "options": [
      "重复记录 (Duplicate Records)，因为它们指向同一个实体。",
      "虚假重复 (False Duplicates)，因为这是由数据标准化不足（如大小写不一）导致的看似重复。",
      "部分重复 (Partial Duplicates)，因为只有姓名字段相同，其他字段可能不同。",
      "数据冗余 (Data Redundancy)，因为它增加了数据管理的复杂度。"
    ],
    "correctAnswerIndex": 1,
    "explanation": "虚假重复指的是由于数据格式不一致或缺乏标准化，导致记录在表面上看起来重复，但实际上可能指向同一实体。'John Smith' 和 'john smith' 的情况正是由于大小写不一致造成的，这是典型的虚假重复问题。",
    "source": "文档中「常见的数据重复问题」部分",
    "hint": "思考一下，这两条记录内容是否“完全相同”？如果不是，是什么原因导致它们看起来像是重复的？"
  },
  {
    "question": "在进行内存去重时，如果不仅需要移除重复元素，还要求保留元素的插入顺序，那么使用哪种Java数据结构最为合适？",
    "options": [
      "HashSet，因为它提供最快的去重性能。",
      "TreeSet，因为它会自动对元素进行排序。",
      "LinkedHashSet，因为它在去重的同时能维持元素的插入顺序。",
      "HashMap，因为它使用键值对来存储数据。"
    ],
    "correctAnswerIndex": 2,
    "explanation": "文档中提到，`HashSet` 不保证顺序，`TreeSet` 会对元素排序，而 `LinkedHashSet` 则结合了两者的优点，它在 `HashSet` 的基础上增加了一个链表来记录元素的插入顺序，因此是需要去重并保持插入顺序时的最佳选择。",
    "source": "文档中「基于数据结构去重」部分",
    "hint": "文档在介绍 `Set` 时提到了三种具体实现，其中一种特别强调了它能“保留插入顺序”。"
  },
  {
    "question": "在数据库中，你需要删除一个订单表里的重复记录（基于订单号），但规定必须保留最新创建的那条记录。哪种SQL技术最适合实现这一复杂的去重逻辑？",
    "options": [
      "使用 `GROUP BY order_id` 子句。",
      "使用 `SELECT DISTINCT order_id` 查询。",
      "使用窗口函数如 `ROW_NUMBER()` 对每个订单号分组并按创建时间排序。",
      "创建一个临时表，并用 `INSERT INTO ... SELECT DISTINCT` 导入数据。"
    ],
    "correctAnswerIndex": 2,
    "explanation": "窗口函数 `ROW_NUMBER() OVER(PARTITION BY ... ORDER BY ...)` 能够对数据进行分组（PARTITION BY），并在组内进行排序（ORDER BY）和编号。通过按订单号分区，按创建时间降序排序，我们可以轻松地为每个重复组中的最新记录分配行号1，然后筛选出这些记录，从而精确地实现“保留最新”的需求。其他方法如 `DISTINCT` 或 `GROUP BY` 无法实现这种精细的选择逻辑。",
    "source": "文档中「基于数据库去重」部分",
    "hint": "哪种SQL技术被描述为可以对结果集中的行进行“排序、排名和分组”，以实现复杂的去重逻辑？"
  },
  {
    "question": "当处理一个已排序的数组并希望以最优的空间复杂度（O(1)）进行去重时，文档中提到的哪种算法最为适用？",
    "options": [
      "哈希表法 (Hash Table Method)",
      "布隆过滤器 (Bloom Filter)",
      "排序法 (Sorting Method)",
      "双指针法 (Two-Pointers Method)"
    ],
    "correctAnswerIndex": 3,
    "explanation": "双指针法是处理有序数组去重的经典算法。它使用一个慢指针指向去重后数组的末尾，一个快指针遍历整个数组。由于它是在原数组上进行操作，不需要额外的存储空间来存放元素，因此空间复杂度为 O(1)，非常高效。文档明确指出其适用场景为“有序数组去重”。",
    "source": "文档中「基于算法去重」部分",
    "hint": "文档中提到有一种算法的时间复杂度为O(n)，空间复杂度为O(1)，但它的前提条件是什么？"
  },
  {
    "question": "根据文档，布隆过滤器（Bloom Filter）在去重场景下的主要特点是什么？",
    "options": [
      "它能100%准确地判断一个元素是否存在，但空间占用较大。",
      "它是一种空间效率极高的概率性数据结构，可能会误判一个新元素为“已存在”（假阳性），但绝不会误判一个已存在元素为“新元素”（无假阴性）。",
      "它必须先对数据进行全局排序才能工作。",
      "它只能用于处理整数类型的去重。"
    ],
    "correctAnswerIndex": 1,
    "explanation": "布隆过滤器的核心是一种概率性判断。它通过多个哈希函数将元素映射到一个位数组中。这使得它在空间上极为高效，但代价是存在一定的“假阳性”概率（False Positive），即它可能会说一个元素“存在”，而实际上它不存在。然而，它绝不会有“假阴性”（False Negative），即如果它说一个元素“不存在”，那它就一定不存在。这使它适用于允许一定容错率的快速预判场景，而非精确去重。",
    "source": "文档中「基于算法去重」部分",
    "hint": "这种数据结构被描述为“空间效率高、可能出错的概率低”，暗示了其并非100%精确。"
  },
  {
    "question": "如果要为一个处理海量数据集（TB级别）的离线批处理任务进行数据去重，文档中提到的哪种外部工具是为此类场景设计的？",
    "options": [
      "Google Guava 库",
      "Apache Spark",
      "Apache Commons Collections 库",
      "Java 8 Stream API"
    ],
    "correctAnswerIndex": 1,
    "explanation": "Apache Spark是一个专为大规模数据处理设计的分布式计算框架。它的 `distinct()` 方法可以在一个由多台机器组成的集群上高效地对TB甚至PB级别的数据进行去重操作。而Google Guava、Apache Commons Collections和Java Stream API主要适用于单机内存中的数据处理，无法胜任这种规模的任务。",
    "source": "文档中「基于外部工具去重」部分",
    "hint": "在“基于外部工具去重”一节中，哪个工具被明确标识为“分布式数据处理框架”并支持“大规模数据集”？"
  },
  {
    "question": "在处理大规模整数数据去重时，如果内存使用效率是首要考虑因素，哪种数据结构或方法具有显著优势？",
    "options": [
      "使用 TreeMap，因为它能保持数据有序。",
      "位图去重 (Bitmap)，因为它用一个比特位来代表一个整数是否存在，空间效率极高。",
      "使用 HashSet，因为它提供O(1)的平均查找时间。",
      "基于排序的去重，因为它不一定需要将所有数据加载到内存中。"
    ],
    "correctAnswerIndex": 1,
    "explanation": "位图（Bitmap）是一种极其节省空间的数据结构，特别适用于对一个密集范围内的整数进行去重和存在性判断。它使用一个比特位（bit）的状态（0或1）来表示一个整数是否存在，相比于`HashSet`等需要存储整个整数对象的方式，内存占用可以减少几个数量级。",
    "source": "文档中「基于数据结构去重」部分",
    "hint": "文档中提到一种“高效的空间优化数据结构”，但它有一个限制，即“仅适用于整数类型的数据”。"
  }
];
        console.log("Quiz Data:", JSON.parse(JSON.stringify(quizData))); // 添加这行用于调试，以可展开的JSON格式输出
        
        let currentQuestionIndex = 0;
        let score = 0;
        // 存储每个问题的回答状态
        const userAnswers = new Array(quizData.length).fill(null); 

        const questionTextEl = document.getElementById('question-text');
        const optionsListEl = document.getElementById('options-list');
        const resultContainerEl = document.getElementById('result-container');
        const quizContentEl = document.getElementById('quiz-content');
        const progressIndicatorEl = document.getElementById('progress-indicator');
        const prevBtn = document.getElementById('prev-btn');
        const nextBtn = document.getElementById('next-btn');
        const hintBtn = document.getElementById('hint-btn');
        const hintContainerEl = document.getElementById('hint-container');

        function loadQuestion() {
          resultContainerEl.innerHTML = '';
          optionsListEl.innerHTML = '';
          hintContainerEl.style.display = 'none'; // 隐藏提示
          
          if (currentQuestionIndex >= quizData.length) {
            showFinalScore();
            return;
          }

          updateProgress();

          const currentQuestion = quizData[currentQuestionIndex];
          questionTextEl.textContent = `(${currentQuestionIndex + 1}/${quizData.length}) ${currentQuestion.question}`;
          
          currentQuestion.options.forEach((optionText, index) => {
            const li = document.createElement('li');
            li.className = 'option-item';
            li.textContent = optionText;
            li.dataset.index = index; // Store index in a data attribute
            // 如果这道题已经回答过，恢复状态
            if (userAnswers[currentQuestionIndex] !== null) {
                if (index === userAnswers[currentQuestionIndex]) {
                    li.classList.add('selected');
                }
            }
            optionsListEl.appendChild(li);
          });

          // 如果已经回答过，直接显示结果
          if (userAnswers[currentQuestionIndex] !== null) {
              const isCorrect = userAnswers[currentQuestionIndex] === currentQuestion.correctAnswerIndex;
              showResult(isCorrect, currentQuestion);
          }
          
          updateNavigationButtons();
          updateProgress();
        }

        function selectOption(optionIndex) {
            userAnswers[currentQuestionIndex] = optionIndex;
            const currentQuestion = quizData[currentQuestionIndex];
            const isCorrect = optionIndex === currentQuestion.correctAnswerIndex;

            // 重新计算分数
            score = userAnswers.reduce((acc, answer, index) => {
                return answer === quizData[index].correctAnswerIndex ? acc + 1 : acc;
            }, 0);

            showResult(isCorrect, currentQuestion);
            updateNavigationButtons();
        }
        
        function updateProgress() {
            const answeredQuestions = userAnswers.filter(answer => answer !== null).length;
            const progressPercentage = (answeredQuestions / quizData.length) * 100;
            progressIndicatorEl.style.width = `${progressPercentage}%`;
        }
        
        function updateNavigationButtons() {
            prevBtn.style.display = 'block';
            nextBtn.style.display = 'block';
            hintBtn.style.display = 'block'; // 显示提示按钮

            prevBtn.disabled = currentQuestionIndex === 0;
            nextBtn.disabled = false; // 最后一题时，下一题按钮不禁用，而是用于显示报告
            nextBtn.textContent = (currentQuestionIndex === quizData.length - 1) ? '查看报告' : '下一题';
            
            // 如果当前问题没有提示，则禁用提示按钮并隐藏提示内容
            if (!quizData[currentQuestionIndex].hint) {
                hintBtn.disabled = true;
                hintContainerEl.style.display = 'none';
                hintContainerEl.textContent = ''; // 清除旧的提示内容
            } else {
                hintBtn.disabled = false;
            }
        }

        function showResult(isCorrect, questionData) {
            resultContainerEl.innerHTML = ''; // 清空之前的结果
            const resultBox = document.createElement('div');
            resultBox.className = `result-box ${isCorrect ? 'correct' : 'incorrect'}`;
            
            let html = `<h3>${isCorrect ? '回答正确！' : '回答错误'}</h3>`;
            if (!isCorrect) {
                html += `<p><strong>正确答案是：</strong> ${questionData.options[questionData.correctAnswerIndex]}</p>`;
            }
            html += `<div class="explanation-text">${questionData.explanation}</div>`;
            html += `<div class="source-text">来源: ${questionData.source}</div>`;
            
            resultBox.innerHTML = html;
            resultContainerEl.appendChild(resultBox);

            // 禁用所有选项的点击事件，并高亮正确/错误答案
            Array.from(optionsListEl.children).forEach((child, index) => {
                child.style.pointerEvents = 'none';
                // 高亮正确答案
                if (index === questionData.correctAnswerIndex) {
                    child.classList.add('correct'); // 需要添加CSS样式
                    child.style.backgroundColor = '#d4edda';
                    child.style.borderColor = '#c3e6cb';
                }
                // 如果选错了，高亮错误选项
                if (!isCorrect && index === userAnswers[currentQuestionIndex]) {
                    child.classList.add('incorrect'); // 需要添加CSS样式
                    child.style.backgroundColor = '#f8d7da';
                    child.style.borderColor = '#f5c6cb';
                }
            });
        }

        function goToNextQuestion() {
            if (currentQuestionIndex < quizData.length - 1) {
                currentQuestionIndex++;
                loadQuestion();
            } else {
                showFinalScore();
            }
        }

        function goToPreviousQuestion() {
            if (currentQuestionIndex > 0) {
                currentQuestionIndex--;
                loadQuestion();
            }
        }
        
        function showHint() {
            const currentQuestion = quizData[currentQuestionIndex];
            if (currentQuestion.hint) {
                hintContainerEl.textContent = currentQuestion.hint;
                hintContainerEl.style.display = 'block';
            } else {
                hintContainerEl.style.display = 'none';
            }
        }

        function showFinalScore() {
            document.querySelector('.quiz-body').style.display = 'none';
            document.getElementById('quiz-footer').style.display = 'none';

            const correctCount = score;
            const totalQuestions = quizData.length;
            const answeredCount = userAnswers.filter(a => a !== null).length;
            const wrongCount = answeredCount - correctCount;
            const skippedCount = totalQuestions - answeredCount;
            const accuracy = totalQuestions > 0 ? Math.round((correctCount / totalQuestions) * 100) : 0;
            const errorRate = totalQuestions > 0 ? Math.round((wrongCount / totalQuestions) * 100) : 0;

            const finalScoreHtml =
                '<div class="final-score-container">' +
                '<h2>答题报告</h2>' +
                '<div class="score-summary">' +
                '<div class="score-card">' +
                '<h3>得分</h3>' +
                '<p>' + correctCount + ' / ' + totalQuestions + '</p>' +
                '</div>' +
                '<div class="score-card">' +
                '<h3>正确率</h3>' +
                '<p>' + accuracy + '%</p>' +
                '</div>' +
                '<div class="score-card">' +
                '<h3>错误率</h3>' +
                '<p>' + errorRate + '%</p>' +
                '</div>' +
                '<div class="score-card score-details">' +
                '<table>' +
                '<tr><td>正确</td><td>' + correctCount + '</td></tr>' +
                '<tr><td>错误</td><td>' + wrongCount + '</td></tr>' +
                '<tr><td>未答</td><td>' + skippedCount + '</td></tr>' +
                '</table>' +
                '</div>' +
                '</div>' +
                '<div class="report-actions">' +
                '<button id="review-btn">回顾测验</button>' +
                '<button class="primary" onclick="location.reload()">再试一次</button>' +
                '</div>' +
                '</div>';

            let reportEl = document.querySelector('.final-score-container');
            if (reportEl) {
                reportEl.remove();
            }
            quizContentEl.insertAdjacentHTML('beforeend', finalScoreHtml);
            document.getElementById('review-btn').addEventListener('click', reviewQuiz);
        }

        function reviewQuiz() {
            const reportEl = document.querySelector('.final-score-container');
            if (reportEl) {
                reportEl.remove();
            }

            document.querySelector('.quiz-body').style.display = 'block';
            document.getElementById('quiz-footer').style.display = 'flex';
            
            currentQuestionIndex = 0;
            loadQuestion();
            updateNavigationButtons(); // Ensure nav buttons are correctly displayed
        }

        // Event Delegation for options
        optionsListEl.addEventListener('click', (event) => {
            if (event.target && event.target.matches('li.option-item')) {
                // Check if the question has already been answered
                if (userAnswers[currentQuestionIndex] === null) {
                    const selectedIndex = parseInt(event.target.dataset.index, 10);
                    selectOption(selectedIndex);
                }
            }
        });

        prevBtn.addEventListener('click', goToPreviousQuestion);
        nextBtn.addEventListener('click', goToNextQuestion);
        hintBtn.addEventListener('click', showHint);
        
        // 初始加载
        loadQuestion();
      </script>
    </body>
    </html>
  